Q. 전공 심리학 실험에서 문항 순서의 영향은 어떻게 확인해요?

답변 1

• 

  취뽀도우미입니다삼성SDS

  코상무 ∙ 채택률 97%

  ---

  설문 설계에서 문항의 배치 순서가 응답에 영향을 미치는 효과를 통제하는 것은 결과의 타당성을 확보하는 중요한 과정입니다. 질문하신 것처럼 같은 문항을 순서만 바꾼 두 가지 버전을 제작하여 비교하는 방식은 흔히 '상쇄 설계'의 일종으로 활용됩니다. 먼저 참여자를 배정할 때는 무작위 할당을 원칙으로 하여, 연구 참여자를 두 집단으로 무작위로 나눈 뒤 각 집단에 A 버전과 B 버전을 각각 제시해야 합니다. 이후 각 집단의 응답 데이터를 수집하여 t-검정 등을 통해 두 집단 간 평균 차이가 통계적으로 유의미한지를 확인합니다. 순서에 따라 응답 결과가 크게 달라진다면 문항 간의 맥락 효과가 강하게 작용하고 있음을 의미하므로, 설문 구성 시 문항 간의 거리를 두거나 사이에 다른 질문을 배치하여 간섭을 최소화해야 합니다. 문항 전체를 무작위로 섞는 방식은 문항 간의 인과 관계나 맥락 효과 자체가 연구의 핵심이 아닐 때 주로 사용하며, 응답자의 피로도가 결과에 미치는 영향을 방지하는 데 효과적입니다. 반면 두 가지 버전을 고정하여 비교하는 방식은 특정 질문이 뒤따르는 질문의 사고 과정에 미치는 '프라이밍 효과'나 '문맥 효과'를 구체적으로 검증하고 싶을 때 적합합니다. 따라서 단순한 설문지 구성에서는 전체 무작위 섞기를 사용하되, 특정 변인 간의 영향력을 정밀하게 측정해야 하는 실험 설계에서는 문항 순서를 의도적으로 배치한 두 버전을 활용하는 전략이 필요합니다. 각 방법론의 특성을 고려하여 연구 목적에 부합하는 방식으로 설문을 설계하십시오.

  ---